Spark技术相关论文
将智能化信息应用于天气信息领域,是当今社会发展的必然趋势.通过使用中央气象台官方网站中的数据,利用爬虫技术提取各个城市的天......
随着信息化规模的不断扩大,网络流量数据呈现爆炸式增长,给网络流量异常检测带来了巨大的挑战。网络流量异常检测可以帮助管理人员分......
近年来,二代基因测序技术的迅速发展使得测序平台产生的数据量大幅增长。以GATK、BWA等工具组成的二代测序数据分析流程在业内得到......
随着国民生活水平的日益提高,汽车消费也逐渐呈现快速增长趋势,如何在城市环境下对于汽车进行综合管理、建设城市智能交通系统是亟......
在互联网加速普及的今天,信息的传递越来越快,产生的数据也越来越大,所以很多问题会产生大量的数据。在现实生活中,这些具体的问题......
个性化信息推送能够有效的解决信息过载,并且能够帮助用户快速、方便地从海量的信息中挖掘出有利用价值的、兴趣相关的信息,近几年,其......
针对目前现有的电能计量数据分析系统处理效率低下、计算周期过长和性能差等问题,设计出一套基于大数据技术的计量装置智能多维分......
针对智能手机端分布范围分散导致的大规模信令数据存储和实时分析处理困难的问题,文中设计了一种基于分布式计算的手机信令数据采......
传统遗传算法存在早熟现象,而且其在海量数据模型下的求解精度和可扩展性也有待提高。为了改进上述问题,在研究孤岛模型和细粒度模......
随着信息技术的不断发展,城市信息化应用水平不断提升,智慧城市建设应运而生。建设智慧城市在实现城市可持续发展、引领信息技术应......
随着近年来互联网的高速发展,各种类型多样的网络应用程序呈现爆炸式增长,人们对于互联网的依赖迅速增长,与现实社会不同的是,用户......
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清......
随着智能配电网的不断发展以及智能化电力设备的广泛应用,配用电数据开始急剧增长。一方面,这些数据不仅来源于生产管理系统、负荷......
当今世界,金融市场经济日益发展,金融财经吸引了更多的投资。但是,经济危机、次贷危机、金融风暴等风险频繁发生,金融投资中的各类......
配电变压器作为配用电系统的关键环节,由于分布面广、网络结构复杂、运行环境恶劣等客观条件的制约,其数据在实际运行中常存在大量......
随着信息技术的不断发展,全文检索技术在档案信息管理中的应用逐渐成熟。本文阐述了传统全文检索的缺点及SPARK技术在海洋档案全文......
在我国信息技术水平的日益提升下,为了能够提高大数据的利用率,需要建立起专门的平台对大数据进行计算与处理。其中以Hadoop技术与......